#!/usr/bin/python
# --coding:utf-8--


"""
Beautiful Soup将复杂HTML文档转换成一个复杂的树形结构,每个节点都是Python对象,所有对象可以归纳为4种:
    Tag
    NavigatableString
    BeautifulSoup
    Comment
"""

# 1. Tag：Tag 通俗点讲就是 HTML 中的一个个标签

from bs4 import BeautifulSoup

html = """
<html><head><title>这是个测试主题</title></head>
<body>
<div>
    <ul>
         <li class="item-0"><a href="https://www.dushu.com/lianzai/1115_1.html">这是第1个链接</a></li>
         <li class="item-1"><a href="https://www.dushu.com/lianzai/1115_2.html">这是第2个链接</a></li>
         <li class="item-inactive"><a href="https://www.dushu.com/lianzai/1115_3.html">
             <span class="bold">这是第3个链接</span></a>
         </li>
         <li class="item-2"><a href="https://www.dushu.com/lianzai/1115_4.html">这是第4个链接</a></li>
         <li class="item-3"><a href="https://www.dushu.com/lianzai/1115_5.html">
             <span class="link-1">这是第3个链接</span></a>
     </li></ul>
 </div>
<p class="内容">这是文章内容</p>
<p class="标题" name="theme"><b>标题信息</b></p>
<p class="标签">内容标签
"""

# 创建 Beautiful Soup 对象
soup = BeautifulSoup(html, 'lxml')
print(soup.title)
print(soup.head)
print(soup.a)
print(soup.p)
print(type(soup.p))

"""
我们可以利用 soup 加标签名轻松地获取这些标签的内容，这些对象的类型是bs4.element.Tag。但是注意，它查找的是在所有内容中的第一个符合要求的标签。
如果要查询所有的标签，后面会进行介绍。
对于Tag，它有两个重要的属性，分别是name和attrs。
"""
print("***********************Tag********================================")
print(soup.name)  # [document] #soup 对象本身比较特殊，它的 name 即为 [document]

print(soup.head.name)  # # head #对于其他内部标签，输出的值便为标签本身的名称


print(soup.p.attrs)  # {'class': ['内容']} # 在这里，我们把 p 标签的所有属性打印输出了出来，得到的类型是一个字典。

print(soup.p['class'])  # soup.p.get('class')
# ['内容'] #还可以利用get方法，传入属性的名称，二者是等价的

soup.p['class'] = "newClass"
print(soup.p)  # 可以对这些属性和内容等等进行修改
# <p class="newClass">...</p>


# 2. NavigatableString
# 如果拿到标签后，还想获取标签中的内容。那么可以通过tag.string获取标签中的文字。
print("**************************NavigatableString*****================================")
print(soup.p.string)  # 这是文章内容

print(type(soup.p.string))  # <class 'bs4.element.NavigableString'>


# 3. BeautifulSoup
"""
BeautifulSoup 对象表示的是一个文档的全部内容.大部分时候,可以把它当作 Tag 对象,它支持 遍历文档树 和 搜索文档树 中描述的大部分的方法.
因为 BeautifulSoup 对象并不是真正的HTML或XML的tag,所以它没有name和attribute属性.但有时查看它的 .name 属性是很方便的,
所以 BeautifulSoup 对象包含了一个值为 “[document]” 的特殊属性 .name
"""
print("**************************BeautifulSoup*****================================")
print(soup.name)  # [document]


# 4. Comment
"""
Tag , NavigableString , BeautifulSoup 几乎覆盖了html和xml中的所有内容,但是还有一些特殊对象.容易让人担心的内容是文档的注释部分
"""
print("************************Comment*******================================")
markup = "<b><!--你好，这是一段注释--></b>"
soup = BeautifulSoup(markup)
comment = soup.b.string
print(comment)
print(type(comment))  # <class 'bs4.element.Comment'>





